Năm 1504, trong triều đình nổ ra sự kiện Giáp Tý sĩ họa (갑자사화, Kapcha Sahwa), Kim Quang Bật bị giết chết. Triệu Quang Tổ cũng bị lưu đày do là đệ tử của Kim. Năm 1510, Triệu Quang Tổ được miễn lưu đày, tham gia khoa cử, vào học ở Thành Quân Quán (Sungkyunkwan). Năm 1515, Triệu Quang Tổ thi điện, đỗ Trạng nguyên, tiến vào triều đình nhậm chức, quan đến Đồng Phó Thừa chỉ.

Triệu Quang Tổ là người có tư tưởng độc tôn Nho giáo. Năm 1516, Triệu Quang Tổ cùng các thành viên Sĩ Lâm phái (사림, Sarim), ép Triều Tiên Trung Tông huỷ bỏ Chiêu cách thự, một hoạt động Đạo giáo, được chấp nhận. Năm 1518, Trong Tông phê chuẩn hiền lương khoa khảo thí, do Triệu Quang Tổ đề xướng. Trong những năm này, Triệu Quang Tổ được Trung Tông trọng dụng, quan chức thăng đến Đại tư hiến, tích cực tuyên dương Nho học. Sau đó, Triệu Quang Tổ cho rằng Trung Tông đối với công thần quá mức lạm phong, yêu cầu tước bỏ phong hiệu Tĩnh quốc công thần, sự kiện này là Ngụy huân tước trừ án. Triệu Quang Tổ nhiều lần sử dụng áp lực số đông, ép buộc Triều Tiên Trung Tông phải phê chuẩn lời tấu, khiến Trung Tông bất mãn.

Ngụy huân tước trừ án khiến Huân cựu phái công thần bất mãn, liên thủ phản kích Triệu Quang Tổ. Hồng Hi tần, con gái đại thần Hồng Cảnh Chu (홍경주, Hong Kyung-ju) thuộc Huân cựu phái, tại hậu sơn vương cung dùng ong mật cắn ra chữ "Tẩu tiếu vi vương" (주초위왕, 走肖为王) trên lá cây. Hồng Hi tần lấy xuống trình lên Trung Tông. Chữ Tẩu 走 và chữ Tiếu ghép lại thành chữ Triệu 趙. Điều này khiến Trung Tông bắt đầu nghi ngờ Triệu Quang Tổ, viết thư cho Hồng Cảnh Chu loại trừ Triệu Quang Tổ.

Năm 1519, Hồng Cảnh Chu nhận được chiếu thư, cùng với Nam Cổn (Nam Gon), Trịnh Quang Bật (Jeong Gwang-pil), Kim Thuyên (Kim Jeon), An Đường (An Dang), sai người lùng bắt Triệu Quang Tổ cùng các quan viên thuộc Sĩ lâm phái. Triệu Quang Tổ được Trịnh Quang Bật cầu tình, được tha chết, đem lưu đày. Trong thời gian lưu vong, Triệu Quang Tổ bị Trung Tông sai người ban thuốc độc. Triệu Quang Tổ uống thuốc độc nhưng chưa chết, bị sứ giả thắt cổ đến chết. Sự kiện này được gọi là Kỷ Mão sĩ họa (기묘사화, Gimyo Sahwa).